KUAISHOU Explorer LLM-Rec Challenge 2026: Reasoning Generative Recommendation
快手 Explorer LLM-Rec 挑战赛 2026:推理式生成推荐
🧭 生成式推荐 · Semantic ID + LLM 推理 ★ 深度解读
Kuaishou
系统总结多任务推理生成推荐挑战赛,开源 OneReason 数据与评测,提炼推理监督、RL 与偏好优化的关键经验
📌 工作参考价值(4 点)
- 在生成式推荐中加入思考链(CoT)不一定提升效果,关键是控制推理轨迹质量。冠军方案发现,把命中目标 SID 的采样轨迹加入训练但 mask 掉答案 loss,只优化 reasoning 部分,可以降低 think 与 nothink 候选重叠,提升两者互补性;直接全量监督会伤害候选多样性。迁移到业务:做 reasoning 数据增强时,对 target 重复的轨迹要限制数量并控制答案监督强度。
- 不同域的推理收益不同,亚军方案采用混合格式:电商用 think,短视频/广告/直播用 nothink,效果优于全 think 或全 nothink。业务上多场景生成式推荐不必强求统一 SFT 格式,可按域验证推理格式的实际增益。
- 处理多任务 SFT 长度差异时,pack-level cross-entropy 有效:先在 pack 内按 token 平均,再跨 pack 等权平均,防止长 response 驱动训练。这对同时训练 item 理解、用户理解、推荐等任务尤其有参考价值。
- 层级 SID 的 RL 奖励稀疏问题可通过 prefix guidance + hierarchical credit assignment 缓解:仅在无正确前缀时补充前缀引导,advantages 计算只比较同一父前缀下的候选,mask 掉给定前缀的梯度,避免只学会浅层一级码,提升全 SID 命中率。